Innovation-Residual Auditing of Autonomous Analysis Agents: Localization, Detection Limits, Error Control, and Identifiability
自主分析代理的创新残差审计：定位、检测限与错误控制
🧭 代理审计的检测极限与错误可控性分析
Johns Hopkins University
对无监督代理错误审计进行理论分析，揭示评分选择对错误传播的影响并给出统计控制方法
📌 工作参考价值（4 点）
- 设计代理操作审计系统时，需谨慎选择评分函数：基于单步条件概率的评分会掩盖下游继承错误，导致一个错误只触发一处警报；基于长程重构的评分能使单次错误扩散为多操作标记，有助于暴露错误影响范围。
- 在电商推荐场景中，若用Agent自动生成分析报告（如活动效果归因），可借鉴论文的统计错误控制程序，在无标注错误样本下，仅利用历史正确分析的可交换性，控制单次审计的错误发现比例。
- 错误检测灵敏度主要受限于操作表示的维度（而非训练数据量），提示在开发审计工具时应优先优化表示质量，盲目增加正确分析样本收益甚微。
- 对于累积型错误，需动态调整比较窗口长度以平衡检测延迟与误报风险，这与推荐系统中在线模型退化的渐进式监控问题有相通之处。